草庐IT

macOS 14

全部标签

ubuntu - Hadoop 2.4.1 安装在 Ubuntu 14.04 上无法正常运行?节点管理器 VM 堆栈保护错误

我正在尝试在Ubuntu14.04LTS64位机器上设置Hadoop2.4.1多集群。启动Hadoop守护程序后,当我jps时,我看不到我的节点管理器正在运行。当我检查节点管理器日志时,出现以下错误:JavaHotSpot(TM)64-BitServerVMwarning:Youhaveloadedlibrary/usr/share/hadoop-2.4.1/lib/native/libhadoop.so.1.0.0whichmighthavedisabledstackguard.TheVMwilltrytofixthestackguardnow.谁能建议我如何解决这个问题?我关注这个

hadoop - HBase-0.98.8-hadoop2 中的 Hive-0.14.0 集成问题

我有hive0.14.1hbase0.98.8和hadoop2.5.0我正在尝试将hive与hbase集成并从HBase中放入zookeeper-3.4.6.jar,hbase-common-0.98.8-hadoop2.jar文件/lib到Hive/lib。遵循的步骤如下:1.hive--auxpath$HIVE_HOME/lib/hive-hbase-handler-0.14.1.jar,$HIVE_HOME/lib/hbase-common-0.98.8-hadoop2.jar,$HIVE_HOME/lib/zookeeper-3.4.6.jar,$HIVE_HOME/lib/g

hadoop - 错误 1066 : Unable to open iterator for alias in Pig 0. 14

我在CentOSPC上安装了Hadoop版本2.7.1和Pig0.14.0。我尝试在Gruntshell上运行Pigdump命令,但失败并出现以下错误:[main]ERRORorg.apache.pig.tools.grunt.Grunt-ERROR1066:Unabletoopeniteratorforalias下面是我正在运行的命令:grunt>youtube_dump=LOAD'/youtubedata.txt'as(video_id:chararray,uploader:chararray,upload_interval:int,category:chararray,video

hadoop - 使用 '-tagFile' 选项的项目文件名字段,使用 PigStorage '-tagFile' 加载,Pig 0.14

AmazonEMR-4.5、Hadoop2.7.2、Pig0.14我想在加载后使用-tagFile选项将文件名字段和选定字段投影到新关系。结果似乎没有意义。示例:tagfile-test.txt(制表符分隔)AAA1232016BBB4562016CCC7892016负载转储test=LOAD'tagfile-test.txt'USINGPigStorage('\t','-tagFile')AS(f0,f1,f2,f3);DUMPtest;(tagfile-test.txt,AAA,123,2016)(tagfile-test.txt,BBB,456,2016)(tagfile-tes

macos - 为 Hadoop 安装 OSX 排除 ssh 到本地主机的故障

Hadoop的部分安装需要通过ssh与本地主机的无密码连接。说明很简单$ssh-keygen-tdsa-P''-f~/.ssh/id_dsa$cat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys$ssh-vvlocalhostOpenSSH_6.9p1,LibreSSL2.1.8debug1:Readingconfigurationdata/etc/ssh/ssh_configdebug1:/etc/ssh/ssh_configline20:Applyingoptionsfor*debug1:/etc/ssh/ssh_configline102:Ap

java - 在错误目录中的 macOS (10.12.3) 上安装了 Java SDK 8

很抱歉提出新问题,但不允许我发表评论here.我需要安装Javasdk,然后创建一个环境变量JAVA_HOME指向java编译器(javac)的目录。我安装了javasdl,但是安装不在/Library/Java下?...但是在这里:/System/Library/Frameworks/JavaVM.framework/Versions/A/Commands/javac稍后我需要安装hadoop并创建一个新的环境变量,指向我的java安装中/lib/tools.jar的位置,但这在我的mac中找不到。我搜索了谷歌并找到了上面的链接,但不允许我发表评论。所有解决方案都建议Java应该安装

macos - 没有密码的本地 Hadoop 安装有多安全?

我想按照博客中的说明在我的Mac上以伪分布式模式安装hadoop2.6http://zhongyaonan.com/hadoop-tutorial/setting-up-hadoop-2-6-on-mac-osx-yosemite.html博主建议执行命令:$ssh-keygen-tdsa-P''-f~/.ssh/id_dsa$cat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys允许无需密码的ssh连接到本地主机。我对ssh一无所知,对于最基本的关注,我深表歉意。谁能告诉我:运行这些命令安全吗?或者我授予对我的电脑的任何类型的公共(public)远程

macos - HDFS和Hadoop 1.0.3的疑惑

我是Hadoop的新手,我一直在尝试设置我的本地机器并运行几个示例来了解该过程的工作原理。我在我的MAC上安装了hadoop1.0.3。我有一系列的问题,我会在描述我到目前为止所做的事情时问他们。我按照说明here.虽然我正在设置独立操作,但最终得到了伪分发。Q1.)有什么区别?编辑了我的.bash_profileexportHADOOP_HOME=/Library/hadoop-1.0.3exportJAVA_HOME=$(/usr/libexec/java_home)在OSX上创建到本地主机的无密码ssh。然后$sshlocalhost。然后$$HADOOP_HOME/bin/ha

apache - Ambari 2.2 - 在 Ubuntu 14.04 Docker 容器上以非零状态代码退出

TL;DR-Ubuntu14.04Docker容器上的DockerizedAmbari在使用默认配置启动时抛出错误我正在尝试对Ambari部署进行Dockerize以支持它与我的Hadoop容器一起运行。这是我的Dockerfile:FROMubuntu:14.04ENVAMBARI_HOME/opt/ambariENVAMBARI_VERSION2.2.0.0RUNexportDEBIAN_FRONTEND=noninteractive\&&apt-getupdate\&&apt-get-yinstallwgetsoftware-properties-commonpython-sof

macos - 无法在 mac os 上的 hdfs 上创建目录

当我尝试在hdfs上创建目录时收到以下错误消息。我安装了所有必需的软件ssh、Java并设置了所有环境变量。不太确定我哪里出错了。有人可以分享您对此的看法吗?谢谢。使用的命令:bin/hdfsdfs-mkdir/Users/ravitejavutukuri/input错误:18/06/3022:56:11WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicablemkdir:`/Users/ravitejavutuku